【Perceptually-enabled Task Guidance】DARPA开发虚拟伙伴以协助军事人员

Original 掰棒子的防务菌从心推送的防务菌 2022-07-29

一直以来，提高人员的知识、生产力和效率似乎是军方以及商业公司永无止境的追求。当前，军事人员预计将执行越来越多的复杂任务，同时与越来越复杂的机器和平台互动。人工智能(AI)支持的助手有可能在用户工作时帮助他们扩展技能组合并提高他们的生产力。然而，目前的虚拟助手并不是为了提供高级别的个人支持或实时知识共享而设计的。

美国国防高级研究计划局（DARPA）开发了“感知赋能任务指导”（PTG）项目，旨在探索开发能够帮助用户完成复杂现实任务的人工智能助手的方法、工艺和技术。其目标是开发虚拟的“任务指导”助手，能够提供及时的视觉和音频反馈，帮助人类用户扩展他们的技能组合，并最大限度地减少他们的错误或失误。为了开发这些技术，PTG寻求利用最近在视频和语音分析的深度学习、任务和计划监控的自动推理以及人机界面的增强现实方面的进展。

对此，DARPA信息创新办公室(I2O)负责PTG的项目经理布鲁斯·德雷珀（Bruce Draper）博士表示：“在不远的将来，你可以设想军事人员在任何时候身上都有许多传感器，如一个麦克风，一个头戴式摄像头，以及像增强现实(AR)耳机这样的显示器。这些传感器平台围绕着用户的所见所闻产生了大量的数据，而AR头盔则提供反馈机制来显示和分享信息或指令。我们在中间需要的是一个助手，它可以在你开始一项任务时识别你正在做什么，拥有完成这项任务的先决技术，可以提供一步步的指导，并可以提醒你正在犯的任何错误。我们越来越多地寻求开发技术，使人工智能成为真正的、与人类合作的伙伴。开发能够在人类用户完成任务时为其提供实质性帮助的虚拟助手，需要在多个机器学习和AI技术重点领域取得进展，包括知识获取和推理。”

为了实现目标，PTG项目分为两个主要研究领域。第一个是专注于解决一系列相互关联的问题的基础研究如知识转移、感知基础、感知注意和用户建模。第二个是专注于这些基础研究结果在军事相关使用案例场景上的综合演示验证。具体来说，该项目将探索任务指导助手如何协助机械维修、战场医疗或飞行员指导。

PTG项目的关键将是探索和开发新的集成技术方法，以解决四个具体的技术挑战。

首先是知识转移。虚拟任务助手将需要能够从针对人类的指令中自动获取任务知识，包括检查表、图解手册和培训视频。

第二个问题领域是感知基础。助手需要能够将他们的感知输入，包括对象、设置、动作、声音和单词，与助手需要用来向人类用户描述和模拟任务的术语保持一致，以便观察结果能够映射到其任务知识。

第三个问题领域是感知注意。助手必须能够关注与当前任务相关的感知输入，同时忽略无关的刺激。他们还需要能够对意料之外但相关的事件做出反应，这些事件可能会改变用户的目标或建议一个新的任务。

最后一个问题领域是用户建模。PTG助手必须能够决定与用户分享多少信息以及何时分享。这就需要开发和整合用户知道的认识论模型，用户正在做的物理模型，以及用户的注意力和情绪状态的模型。

由于这四个问题并不是相互独立的，所以PTG旨在追求综合的方法和解决方案，共同应对这四个挑战领域。

对DARPA来说，开发人工智能体并不是一个新领域。50多年来，除了投资于人工智能技术的进步，DARPA还资助创建了Siri等当今虚拟助手的基础技术。在2000年代初，DARPA推出了“个性化学习助理“（PAL）项目。在PAL项目下，研究人员创建了认知计算系统，以提高军事决策的效率和多级指挥的效果。

战场之外——DARPA的日常技术（翻译&字幕 by 防务菌）

DARPA将于2021年3月18日下午1:00至4:45（美国东部时间）通过Zoom举行提案者日活动。

来将通名&非诚勿扰

前情回顾